Personal AI Agent for Camera Roll VQA
面向相机卷的个人AI视觉问答助手
🧭 个人视觉记忆Agent与分层检索 ★ 深度解读
University of Wisconsin-Madison · Korea University · Adobe Research
提出个人相机卷VQA基准与分层记忆AI Agent，揭示长程个性化视觉理解的挑战
📌 工作参考价值（4 点）
- 分层记忆结构可直接复用到用户行为流：三层金字塔（原始行为→个性化摘要→事件/会话摘要）可对电商用户的浏览、加购、下单序列建模，O(1)双向链接支持快速回溯，适合构建「我上次买这类商品后还看了什么」之类的查询。
- 两轴工具设计是工程化检索的轻量范本：将检索接口按“范式（语义/词法/过滤）”和“深度（预览/全文/原始数据）”分解为5个原子工具，既控制token预算又保持灵活性，适合在推荐解释或对话推荐中按需调用不同粒度的信息。
- 事件分段方法可用于会话/场景切分：用MLLM以增量的方式判断行为属于延续、更新还是新事件，无需离线全量重处理，适合实时流式场景，如电商平台中将用户连续行为自动聚合为“选购某品类”“犹豫比较”等有语义的单元。
- 预算感知的Agent设计值得借鉴：显式给出剩余步骤数和工具配额，促使Agent在粗筛和精查之间做权衡，可在多步推荐推理中防止过度消耗资源，同时失败分析显示需针对记忆-行动循环做专项后训练，而非仅依赖通用能力。